O objetivo deste artigo foi avaliar o uso do índice de comorbidade de Charlson (ICC) para predizer óbito hospitalar em internações da região de Ribeirão Preto, São Paulo, Brasil. Foram analisadas 54.680 hospitalizações entre janeiro de 1996 e dezembro de 1997. Duas adaptações do ICC para a Classificação Internacional de Doenças (CID) foram comparadas e as trinta condições clínicas avaliadas por Charlson foram revistas. A regressão logística foi utilizada para avaliar a capacidade dos modelos de predizer o óbito hospitalar. O modelo de base incluiu: idade, sexo e diagnóstico principal. Diferenças na adaptação para a CID-9 pouco impactaram a capacidade de discriminação dos modelos. A revisão das trinta condições clínicas aumentou a capacidade de discriminação do modelo de predição de óbito (estatística C = 0,73) quando comparado ao modelo com o ICC original (estatística C = 0,72). Todos os modelos testados tiveram efeito reduzido sobre a capacidade discriminativa do modelo de base (estatística C = 0,70). Os resultados apontam a importância de se dispor no país de um sistema de informação que permita uma descrição completa da morbidade hospitalar para o monitoramento do desempenho dos serviços.

The objective of this article was to evaluate the use of the Charlson comorbidity index (CCI) to predict inpatient death in Ribeirão Preto, São Paulo State, Brazil. 54,680 hospitalizations from January 1996 to December of 1997 were analyzed. Two International Classification of Diseases adaptations of CCI were compared, and the 30 clinical conditions assessed by the Charlson index were reviewed. Logistic regression was used to evaluate the models' capacity to predict inpatient death. The baseline model included: age, sex, and principal diagnosis. Differences in ICD adaptations showed little effect on the models' discriminatory capacity. Revision of the 30 clinical conditions increased the model's discriminatory capacity to predict death (C statistic = 0.73), as compared to the model with the original CCI (C statistic = 0.72). All tested models had a reduced effect on the baseline model's discriminatory capacity (C statistic = 0.70). The results show the importance of Brazil having an information system that allows a complete description of hospital morbidity in order to monitor health service performance.

O objetivo deste artigo foi avaliar o uso do índice de comorbidade de Charlson (ICC) para predizer óbito hospitalar em internações da região de Ribeirão Preto, São Paulo, Brasil. Foram analisadas 54.680 hospitalizações entre janeiro de 1996 e dezembro de 1997. Duas adaptações do ICC para a Classificação Internacional de Doenças (CID) foram comparadas e as trinta condições clínicas avaliadas por Charlson foram revistas. A regressão logística foi utilizada para avaliar a capacidade dos modelos de predizer o óbito hospitalar. O modelo de base incluiu: idade, sexo e diagnóstico principal. Diferenças na adaptação para a CID-9 pouco impactaram a capacidade de discriminação dos modelos. A revisão das trinta condições clínicas aumentou a capacidade de discriminação do modelo de predição de óbito (estatística C = 0,73) quando comparado ao modelo com o ICC original (estatística C = 0,72). Todos os modelos testados tiveram efeito reduzido sobre a capacidade discriminativa do modelo de base (estatística C = 0,70). Os resultados apontam a importância de se dispor no país de um sistema de informação que permita uma descrição completa da morbidade hospitalar para o monitoramento do desempenho dos serviços.

The objective of this article was to evaluate the use of the Charlson comorbidity index (CCI) to predict inpatient death in Ribeirão Preto, São Paulo State, Brazil. 54,680 hospitalizations from January 1996 to December of 1997 were analyzed. Two International Classification of Diseases adaptations of CCI were compared, and the 30 clinical conditions assessed by the Charlson index were reviewed. Logistic regression was used to evaluate the models' capacity to predict inpatient death. The baseline model included: age, sex, and principal diagnosis. Differences in ICD adaptations showed little effect on the models' discriminatory capacity. Revision of the 30 clinical conditions increased the model's discriminatory capacity to predict death (C statistic = 0.73), as compared to the model with the original CCI (C statistic = 0.72). All tested models had a reduced effect on the baseline model's discriminatory capacity (C statistic = 0.70). The results show the importance of Brazil having an information system that allows a complete description of hospital morbidity in order to monitor health service performance.

A avaliação de desempenho dos serviços de saúde é essencial. A comparação de indicadores de desempenho requer o uso de estratégias de ajuste de risco. O objetivo deste artigo é avaliar variações no desempenho clínico, mensurado pela mortalidade e pelo tempo de permanência, entre hospitais públicos e privados, levando em conta diferenças nas características dos pacientes tratados. Este estudo é limitado à região de Ribeirão Preto, São Paulo, Brasil. Entre os anos de 1996 e 1998, 32.906 pacientes admitidos com diagnósticos cardiovasculares e respiratórios foram estudados. As variáveis usadas para o ajuste de risco dos indicadores de desempenho foram: sexo, idade, diagnóstico principal e medidas de gravidade baseada em comorbidade. Os resultados mostraram que o desempenho clínico dos hospitais públicos, mensurado pela mortalidade hospitalar ajustada (razão de chance = 0,41), é superior ao dos privados. Os hospitais públicos e privados não foram estatisticamente diferentes com relação ao tempo de permanência dos pacientes. Ainda que problemas conceituais e metodológicos devam ser resolvidos, taxa de mortalidade e outros indicadores de desempenho ajustados devem ser considerados como instrumentos úteis para identificar problemas de desempenho dos serviços de saúde.

Performance assessment in health services is essential. The comparison of performance indicators requires the use of risk adjustment strategies. The objective of this paper was to assess variations in clinical performance, measured by hospital mortality and length of stay, between private and public hospitals, while taking into account the hospital case mix. This study is located in the Ribeirão Preto region in São Paulo State, Brazil. From 1996 to 1998, 32,906 patients admitted with cardiovascular and respiratory diagnoses were studied. Variables used for risk adjustment of performance indicators were: sex, age, principal diagnosis, and severity measures based on co-morbidity. Clinical performance in public hospitals as measured by adjusted hospital mortality (OR = 0.41) was better than in private hospitals. Public and private hospitals were not statistically different concerning patients' length of stay. Although some conceptual and methodological problems persist, hospital mortality and other adjusted performance indicators should be considered as useful tools to identify health services' performance problems.

A avaliação de desempenho dos serviços de saúde é essencial. A comparação de indicadores de desempenho requer o uso de estratégias de ajuste de risco. O objetivo deste artigo é avaliar variações no desempenho clínico, mensurado pela mortalidade e pelo tempo de permanência, entre hospitais públicos e privados, levando em conta diferenças nas características dos pacientes tratados. Este estudo é limitado à região de Ribeirão Preto, São Paulo, Brasil. Entre os anos de 1996 e 1998, 32.906 pacientes admitidos com diagnósticos cardiovasculares e respiratórios foram estudados. As variáveis usadas para o ajuste de risco dos indicadores de desempenho foram: sexo, idade, diagnóstico principal e medidas de gravidade baseada em comorbidade. Os resultados mostraram que o desempenho clínico dos hospitais públicos, mensurado pela mortalidade hospitalar ajustada (razão de chance = 0,41), é superior ao dos privados. Os hospitais públicos e privados não foram estatisticamente diferentes com relação ao tempo de permanência dos pacientes. Ainda que problemas conceituais e metodológicos devam ser resolvidos, taxa de mortalidade e outros indicadores de desempenho ajustados devem ser considerados como instrumentos úteis para identificar problemas de desempenho dos serviços de saúde.

Performance assessment in health services is essential. The comparison of performance indicators requires the use of risk adjustment strategies. The objective of this paper was to assess variations in clinical performance, measured by hospital mortality and length of stay, between private and public hospitals, while taking into account the hospital case mix. This study is located in the Ribeirão Preto region in São Paulo State, Brazil. From 1996 to 1998, 32,906 patients admitted with cardiovascular and respiratory diagnoses were studied. Variables used for risk adjustment of performance indicators were: sex, age, principal diagnosis, and severity measures based on co-morbidity. Clinical performance in public hospitals as measured by adjusted hospital mortality (OR = 0.41) was better than in private hospitals. Public and private hospitals were not statistically different concerning patients' length of stay. Although some conceptual and methodological problems persist, hospital mortality and other adjusted performance indicators should be considered as useful tools to identify health services' performance problems.

OBJETIVO: Avaliar as potenciais vantagens e limitações do uso das bases de dados dos formulários de Autorização de Internação Hospitalar e da metodologia do relacionamento probabilístico de registros, para a validação de relatos de utilização de serviços hospitalares durante inquéritos domiciliares. MÉTODOS: Um total de 2.288 entrevistas domiciliares foram realizadas em Duque de Caxias, RJ (Brasil). A informação sobre a ocorrência de ao menos uma hospitalização durante o ano que precedeu a entrevista foi obtida de um total de 10.733 moradores. Os 130 registros de moradores que relataram ao menos uma hospitalização em hospital público foram relacionadas com uma base de dados hospitalares contendo 801.587 registros, usando um processo automático combinado com uma extensiva revisão manual. RESULTADOS: Dos 130 moradores, foram encontrados registros de 74 (57%) na base hospitalar. Entretanto, somente 60 indivíduos (46%) estiveram hospitalizados na base hospitalar dentro do período de referência do estudo. Hospitalizações devido a procedimentos cirúrgicos foram significativamente mais prováveis de serem identificadas na base hospitalar. O baixo nível de concordância obtido no estudo pode ser explicado pelos seguintes fatores: erros no processo de relacionamento, efeito telescópio e um registro incompleto dos episódios na base hospitalar. CONCLUSÕES: O uso de bases hospitalares administrativas e da metodologia de relacionamento probabilístico de registros pode representar uma alternativa metodológica para validação de relatos de utilização de serviços de cuidados de saúde. Entretanto, algumas estratégias devem ser empregadas com o objetivo de minimizar os problemas relacionados ao uso dessa metodologia em condições não ideais. Um identificador unívoco, como o número de seguro saúde e a cobertura universal do banco de dados, seria desejado.

OBJECTIVE: To evaluate the potential advantages and limitations of the use of the Brazilian hospital admission authorization forms database and the probabilistic record linkage methodology for the validation of reported utilization of hospital care services in household surveys. METHODS: A total of 2,288 households interviews were conducted in the county of Duque de Caxias, Brazil. Information on the occurrence of at least one hospital admission in the year preceding the interview was obtained from a total of 10,733 household members. The 130 records of household members who reported at least one hospital admission in a public hospital were linked to a hospital database with 801,587 records, using an automatic probabilistic approach combined with an extensive clerical review. RESULTS: Seventy-four (57%) of the 130 household members were identified in the hospital database. Yet only 60 subjects (46%) showed a record of hospitalization in the hospital database in the study period. Hospital admissions due to a surgery procedure were significantly more likely to have been identified in the hospital database. The low level of concordance seen in the study can be explained by the following factors: errors in the linkage process; a telescoping effect; and an incomplete record in the hospital database. CONCLUSIONS: The use of hospital administrative databases and probabilistic linkage methodology may represent a methodological alternative for the validation of reported utilization of health care services, but some strategies should be employed in order to minimize the problems related to the use of this methodology in non-ideal conditions. Ideally, a single identifier, such as a personal health insurance number, and the universal coverage of the database would be desirable.

OBJETIVO: Avaliar as potenciais vantagens e limitações do uso das bases de dados dos formulários de Autorização de Internação Hospitalar e da metodologia do relacionamento probabilístico de registros, para a validação de relatos de utilização de serviços hospitalares durante inquéritos domiciliares. MÉTODOS: Um total de 2.288 entrevistas domiciliares foram realizadas em Duque de Caxias, RJ (Brasil). A informação sobre a ocorrência de ao menos uma hospitalização durante o ano que precedeu a entrevista foi obtida de um total de 10.733 moradores. Os 130 registros de moradores que relataram ao menos uma hospitalização em hospital público foram relacionadas com uma base de dados hospitalares contendo 801.587 registros, usando um processo automático combinado com uma extensiva revisão manual. RESULTADOS: Dos 130 moradores, foram encontrados registros de 74 (57%) na base hospitalar. Entretanto, somente 60 indivíduos (46%) estiveram hospitalizados na base hospitalar dentro do período de referência do estudo. Hospitalizações devido a procedimentos cirúrgicos foram significativamente mais prováveis de serem identificadas na base hospitalar. O baixo nível de concordância obtido no estudo pode ser explicado pelos seguintes fatores: erros no processo de relacionamento, efeito telescópio e um registro incompleto dos episódios na base hospitalar. CONCLUSÕES: O uso de bases hospitalares administrativas e da metodologia de relacionamento probabilístico de registros pode representar uma alternativa metodológica para validação de relatos de utilização de serviços de cuidados de saúde. Entretanto, algumas estratégias devem ser empregadas com o objetivo de minimizar os problemas relacionados ao uso dessa metodologia em condições não ideais. Um identificador unívoco, como o número de seguro saúde e a cobertura universal do banco de dados, seria desejado.

OBJECTIVE: To evaluate the potential advantages and limitations of the use of the Brazilian hospital admission authorization forms database and the probabilistic record linkage methodology for the validation of reported utilization of hospital care services in household surveys. METHODS: A total of 2,288 households interviews were conducted in the county of Duque de Caxias, Brazil. Information on the occurrence of at least one hospital admission in the year preceding the interview was obtained from a total of 10,733 household members. The 130 records of household members who reported at least one hospital admission in a public hospital were linked to a hospital database with 801,587 records, using an automatic probabilistic approach combined with an extensive clerical review. RESULTS: Seventy-four (57%) of the 130 household members were identified in the hospital database. Yet only 60 subjects (46%) showed a record of hospitalization in the hospital database in the study period. Hospital admissions due to a surgery procedure were significantly more likely to have been identified in the hospital database. The low level of concordance seen in the study can be explained by the following factors: errors in the linkage process; a telescoping effect; and an incomplete record in the hospital database. CONCLUSIONS: The use of hospital administrative databases and probabilistic linkage methodology may represent a methodological alternative for the validation of reported utilization of health care services, but some strategies should be employed in order to minimize the problems related to the use of this methodology in non-ideal conditions. Ideally, a single identifier, such as a personal health insurance number, and the universal coverage of the database would be desirable.